BUNDES|pPUBUK^EUTSci^ ' 




REC'D H APR 2003 



WIPO 



Prioritatsbescheinigung Ciber die Einreichung 
einer Patentanmeldung 



Aktenzeichen: 



102 13 931.8 



Anmeldetag: 
Anmelder/lnhaber: 
Bezeichnung: 
IPC: 



28. MSrz 2002 



IBAK Helmut Hunger GmbH & Co KG, Kiel/DE 



Verfahren zum Inspizieren von Kanalrohren 



F 16 L 55/26 



pie angehefteten StOcke sind eine richtige und genaue Wiedergabe der ursprung- 
lichen Unterlagen dieser Patentanmeldung. 



MQnchen, den 27. Februar 2003 
Deutsches Patent- und Markenamt 
Der PrSsident 
Im Auftrag 



Waasmaier 



1 




Zusammen&ssung 

Verfehren zum Lispizieren von Kanalrohrien, bei dem mit einer mit einer Fisheye- . 
Linse versehenen Kamera an bestinimten Orten im Rohr aufgenommene, hemi- oder 
vollspharische digitale Bilder unter Erzeugen von ein virtuelles Verschwenken erlau- 
benden, perspektivischen Bilder verrechnet werden, bei dem bei bekannter Geometrie 
des abgebildeten Rohrs aus den an .einem Ort genommenen Bilddaten die sich fiir an 
einem beliebigen benachbarteA Ort '(der gewunschten fiktiven Kameraposition) erge- 
bende Zwischenbilder errechnet und dargestellt werden, indem die au%enommenen 
Bilder rechnerisch auf die bekannte Rohrgeometrie projiziert und die sich .daraus fllr 
den benachbarten Ort ergebenden perspektivischen Bilddaten errechnet werden. 
CFig.l) 
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IBAK Helmut Hunger GmbH & Co. KG 
Verfahren zum Inspizieren von Kanalrohren 



Die Erfindung betriflft ein Verfahren zum Inspizieren von Rqhren wie Abwasserrohren, Pipe- 
lines^ imd dgl. 

Aus der EP 1022553 Al ist eini in einem Kanalrohr verfahrbarer Kamerawagen bekiannt/ der 
zur Erzeugung vollspharischer Biider an definierten Streckenabschnitten langs der Rohrachse 
(z.b. alle 5cm) mit Weitwinkelobjektiven, insbesondere auchFisheye-Objektiyen, eingerich- 
tet ist. Die digitalen Bildsignale werden gespeichert und konnen zu einem spateren Zeitpunkt 
optisch ausgewertet werden, Aus der US 5185667 ist ein Verfahren zur Erzeugung perspekti- 
vischer Abbiidungen mit Schwenk-; Neige-, Dreh- und VergroBerungsfiinktionen aus mit ei- 
nem Pisheye-Objektiv gefertigten digitalen Bildern bekannt, das ein Betrachten der an dem 
Aufiiahmepunkt aufgenommen Biider in veirschiedenen Richtungen, aber nur von diesem 
Punkt aus, ermoglicht. 
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Bei dner Anwendung dieses Ver&hrens zum Wiedergeben von Aufbahmen yon einzelnen 
Bildem an verschiedenen Often in dem ICanalrohr kann durch ein geeignetes Verrechnen der 
gewonnen Bildsignale jeder Ort der Rohrwandung betrachtet werden, aber nur von den dis- 
kreten Orten, an denen die Aufiiahmen gefertigt worden sind. Wenn die Fahrt des Kamera- 
wagens durch das Kanalrohr nachvollzogen wird, so springt das Bild von Au&ahmeort zu 
Aufiiafanieort. Es ist aber erwiinscht, bei dem nachtraglichen virtuellen Dxjrchfahren des Ka- 
nals den Eindruck eines tatsachlichen Durchfahrens zu erzeugen, also Bilder von Drten aus 
wiederzugeben, an denen tatsachlich gar keine Aufiiahme gefertigt worden ist. 

Der Erfindung liegt.die Aufgabe zugrunde, anhand diskreter, an definierten Streckenabschnit- 
ten des Rohre aufgenoiiimener hemispharischer oder vollspharischer Bilder eine kontinuierli- 
che axiale Kanailinispektionsbefahrung zu simulieren, also an beliebigen (aufierhalb der opti- 
schen Zehtren der Bildaufiiahmen liegenden) Orten perspektivische Bilder zu erzeugen. Er^ 
fiodungsgeniaB wird diese Aufgabe durch die Mprkmale des Hauptanspnichs gelost, die Un- 
teranspriiche geben vorteilhafie Ausgestaltungen der Erfindung an. 

Die Erfindung nutzt den Umstand, dass bei Rphrsystemen deren Geometrie (MaBe \xAd Pro- 
fil) und der Ort der Kamera innerhalb des Rohres jeden&lls naherungswdse bekannt sind. 
Dies macht es mO^ch, aus diskreten Bildem an definierten Streckenabschnitten (z.b. alle 
5cm) kontinuierliche Ansichten langs der Rohrachse zu errechnen, die zwischen den eigentli- 
chen Originalaufiiahmen liegen. 

* Hierzu Werden die Bilddaten der hemispharischen oder vollspharischen Bilder (eine bzw. 
zwei Fisheyeaufiiahmen) ausgehend von dem Ort der Kamera in dem Rohr. rechnerisch auf 
die Irinenflache der bekannten Rohrgeometrie projiziert, wobei mathematisch ein unendlich 
langes dreidimensionales.Rohrmodel verwendet wird. Zu jedem Bildpunkt des 21)- Fisheye- 
bildes V(X^Yf) mit bekannter Abbildungsfimktion (z,b. F-Theta-Objektiv) errechnen sich die 
Einfallswinkel (a,0 der Kugelkoordinaten) und daraus ein korrespbndierender. Bildpunkt im 
3D-Raum P*(Xr,Yr,Zr) auf der Rohrinnenflache. Fur jeden Oit der Origmalaufiiahmen kann 
im Speicher des Rechners eine solche 3D-Szene aufgebaut werden Mt bekannten Techniken 
der 3D-GraGkvisualisierung kann nun eine zweidimensionale perspektivische Ansicht er- 




zeugt werden. Neben Schwenk, Neige, Dreh und VergrSBeningsfiuiktioneii erlaubt dies auch 
eine Translation (also die sinwlation eina: axialenBewegung dutch das Rohr an andere Orte 
als denMi der Originalaufiiahmen).' 

Befindet sich die fiktive Kamefa nun imBereich einer nSchsten Originalaufiiahme, wird mit 
dieser Aufiiahme eine neue 3D-Szene aufgebaut. Der Giiltigkeitsbereich einer Szene ent- ' 
spricht also dem Abstand der diskreten Originalaufiiahmezentren. 

Urn die zu berechnende Datenmenge (Anzahl derBUdpunkte) zu reduzieren, kann man auch 
in der aktuellen Szene aus der gewttnschten fiktiven Kameraposition und derenBUckwinkel 
im Raum ledigUctf die BUdpunkt berechnen, die sich in dem gewttnschten Ausschnitt (Region 
of Interest) der Bildebene B (der fiktiven Kamera) befinden. Aus den isildpunktkoGf dinaten 
der Bttdebene B errechnet man, mit Klfe dnes Projektionszentrums zuerst die korrespbndie- 
renden Bildpvmktkoordinaten auf der Innenfladie der bekannten Rohrgeometrie und daraus 
die koifespondierenden BUdpunktkoordinaten in der Fisheyeaufiiahme und erhalt sortiit den 
Farb- und Heffigkeitswert des Bfldpunktes auf der Bildebene B mit P"(Xb, Yb) = P(X^ Yf). 

Die hier fur notwendige Matheniatik ist dem Fachmann bekannt (Trigonometrie und Geomet- 
rie des Raumes). 

Der Erfindung liegt damit - bildhaft gesprochen - die Idee zu^nde, die von dem Fisheye- 
Objektiv erfessten Bilder ausgehend von dem Aufoahmeort auf die Innenflache eines imagi- 
naren RohreS zu projizieren und dieses nach Umrechnung von einem' beliiebigen, fortsclirei- 
tenden Ort in zentralperspektivischen Bilder zu bettachtiKi. 

Die Zeichmmg dient zum besseren Verstandnis der Erfindung. 
Dabeizfeigt: 

Fig. 1 eine schematischeDafstellung der Errechnung der Zwischenbilder, 
Fig. 2 die Bildebene der fiktiven Kamera und 
Fig. 3 das Fisheyebild. 



Die folgenden Daten sind in der Recheneinheit (Rechenprogramm) vorgegeben bzw vor- 
zugeben: 

Das Rohrproffl und dereri MaBe ( z.b, Kreis- mit DN, oder Eiprofil mit Abmessungen) Positi- 
on der Fisheyes und Winkel ihreroptischeh AchsenimRohr,. \. 

Brennweite des Fisheyes und deren Abbildungsfiinktion (F-theta-Verzeichnung), Position, 
Brennweite, Sehwenk-, Neige- und Drehwinkel der fiktiven Kamera. 

In Fig. 1 sind zur Vereinfachung nur Strahleri xmd Kpordinaten auf der Y-Z-Ebene beischrie- 
ben. Die BUdebene B. der fiktiven Kamera ist nach oben geneigt (nicht gedreht und nicht ver- 
schwenkt). Die optischen Adhsen der Fisheyes entsprechen der Rohrachse. 

B =^ Biidebene der fiktiven Kamera » 

F = Brennweite der fiktiven Kamera (Abstand der Bildebtoe B (Projektionsebene) zum opti- 
sches Zeirthrai der fiktiven Kamera (Projektionszentrum) 

a , 0 = Einfallswinkel ins Fisheye, wobei 9 der Winkel zur Z- Achse und a der Winkel, den 

, . ■ '\ 

die ?rojektion des Strahls auf die X, Y-Ebene mit der X- Achse bildet, ist. 

(Xb,Yb) = Bildpunktkoordihaten auf der Biidebene B > 
pd-,Yr,Zr) =Badpunktkoordmaten auf decRohrwand 
Es gilt P" (Xb, Yb) = P (X^ Yf) 

Die Bildpunktkoordinaten (Xf,Yf) im F-Theta- Fisheyebild errechnet sich aus den Ebtifalls- 
winkel 6 und a mit: 

Yf=^ sin(a)*Ff*e und Xf- cos(a) * Ff * 0,' ' 
wobei Ff= Brennweite des Fisheye-Obektivs. ^ 




InFig. Igilt: 

a = Pi/2 -> Xf= OundYf=Ff*G. 

In Fig. 1 wird angenonimen, dass an bestimmten Orten innerhalb des zu inspizierenden Roh- 
res von einem Fisheye-Objektiv nach vome weisende und von einem anderen Fisheye- 
Objektiv nach hinten weisende Aufiiahmen gefertigt werden. Von einer fiktiven Kameraposi- 
tion aus, die zwischen den Orten, an denen Originalaufiiahmen gefertigt wurden, werden 
Szenen erfasst, die von den Orten, ati denen Originalaufiiahmen gefertigt wurden, ausgehend 
aufgebaut werden. 



Anspruche 



1. Verfahren zum Inspizieren .von Kahalrohren, bei dem mit einer mit einer Fish- 
.eye-Linse versehenen Kamera an bestimmten Orten im Rohr aufgenommene, hemi- 
oder vollspharische digitale Bilder unter Erzeugen von ein virfuelles Verschwenken 
erlaubenden, perspektiyischen BDder verrechnet werden, dadurch gekennzeichnet, 
dass bei bekannter Geometric des abgebildeten Rohrs aUs den an einem Ort genom- 
menen Bilddaten die sich fiir an einem beliebigen benachbarten Ort (der gewunschten 
fiktiven KaiAeraposition) ergebende Zwischenbilder errechnet und dargestellt werdeii, 
indem die aufgenonraienen Bilder rechnerisch auf die bekannte Rolirgeometrie proji- 
ziert imd die sicli darau.s fttr 4en benachbarten Ort eirgebenden perspektivischen Bild- 
daten errechnet werden. 

2. Ver&hren nach Ansprach 1, dadurch gekeimzdichnet, dass zu jedemJBildpunkt 
des 2D-Fisheye-Bades P' (Xf, Yf) mit bekannter Abbildungsfunklion die Einfellswin- 
kel (a, 0) der Kugelkoordinaten und daraus ein korrespondierender Bildpunkt im 3D- 
RaumPpCr, Yr;Zr) auf der Rohroberflache errechnet wird. . 

3. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass aus der gewunsch- 
ten fiktiven Kamerapostion und deren Blickwinkel im Raum die Bildpunkte, die sich 
in dem gewunschten Ausschnitt der Bil4ebene befinden, errechnet werden, indem aus 
dem Bildpunktkoordinaten (Xb, Yb) der Bildebene B unter Aimahme eines im Ab- 
stand F von der Bildebene B liegenden Projekdonszentrums die korfespondierenden 
Bildpunktkoordinaten (Xr, Yr, Zr) axif die Innenflache der bekannten Rohrgeometrie 
und die korrespondierenden Bildpunktkoordinaten (Xf, Yf) des Fisheye-Bildes errech- 
net werden uhd so der Farb- und Helligkeitswert des Bildpimktes auf der Bildebene B 
mit P" (Xb, Yb) = P (Xf, Yf) gewbnnen wird. 



